video loopback for webui
https://video.twimg.com/ext_tw_video/1628713211913699328/pu/vid/682x1278/0-Jig_4gYpVcD0LV.mp4
This is a Stable Diffusion WebUI extension for video img2img, which improves the stability of the video through loopback and temporal blurring methods, trying to reduce the flicker that is typical of img2img animations. This extension can be seen as a video version of loopback and superimpose, with some enhanced features. It's a quite simple method, but sometimes useful. The design is intended for character animations and usually needs to be used with Lora or DreamBooth. The model quality requirements are relatively high, and the stability of the model itself will greatly affect the difficulty of subsequent parameter adjustment. The final video effect is very very sensitive to the setting of parameters, which requires careful adjustment. This is a very mysterious thing, if it is not adjusted well, it is better to use Batch img2img directly :) It is hoped that open source will promote more people to test different parameter configurations, so as to find the best strategy.
With the help of this script, it allows for higher denoising (such as 0.4 or even higher), which enables us to obtain good results even in situations where the driving video is relatively blurry. However, generally speaking, denoising between 0.3~0.4 can solve many requirements.
In addition to the parameters in the script interface, all parameters in the original webui interface will affect the generation, so don't forget to adjust this part.
This extension itself lacks some detailed testing, so there may be bugs. The known bug at the moment is that in the img2img interface or inpainting interface, you need to make sure that there is an image in the webui interface before you start processing (just drag and drop an image).
DeepL.icon
これは動画 img2img 用の Stable Diffusion WebUI 拡張で、ループバックとテンポラルブラーリング手法により動画の安定性を向上させ、img2img アニメーションにありがちなちらつきを抑えようとするものです。この拡張機能は、ループバックとスーパーインポーズのビデオ版と見ることができ、いくつかの機能が強化されています。非常にシンプルな方法ですが、時々役に立つことがあります。
キャラクターアニメーションを想定したデザインで、通常はLoraやDreamBoothと併用する必要がある。モデルの品質要求は比較的高く、モデル自体の安定性がその後のパラメータ調整の難易度に大きく影響する。
最終的な映像効果は、パラメータの設定に非常に大きく影響されるため、慎重な調整が必要です。これは非常に不思議なことで、うまく調整できない場合は、Batch img2img を直接使用したほうがよいでしょう :)
オープンソースにすることで、より多くの人がさまざまなパラメータ設定をテストし、最適な戦略を見出すことが期待されます。
このスクリプトの助けを借りて、より高いノイズ除去（例えば0.4またはそれ以上）を可能にし、走行映像が比較的ぼやけている状況でも良い結果を得ることができるようになりました。しかし、一般的には0.3~0.4の間でノイズ除去を行えば、多くの要求を解決することができます。
スクリプトインターフェイスのパラメータに加え、オリジナルのwebuiインターフェイスのパラメータも全て生成に影響しますので、この部分の調整もお忘れなく。
この拡張機能自体、詳細なテストが不足しているため、バグがあるかもしれません。現時点での既知のバグは、img2imgインターフェースやinpaintingインターフェースにおいて、処理を開始する前にwebuiインターフェースに画像があることを確認する必要があることです（画像をドラッグ＆ドロップするだけです）